Data Engineering Study #28 データ基盤のCI/CD

2025/02/27(木)19:00 〜 21:30 開催

ブックマーク

#Snowflake, #Terraform, #IaC

イベント内容

過去の Data Engineering Study のアーカイブはこちらからご視聴いただけます。

開催内容

概要

本イベントは、Infra Study Meetup を運営する Forkwell と、データ基盤の総合支援サービス「TROCCO®️」の開発・運営を行う primeNumber による共催イベントです。データ分析に精通した講師をお招きし、データ分析基盤の「これまで」と「これから」を学ぶことを趣旨として開催いたします。
複数回にわたって、各回テーマに沿った内容で各分野でご活躍されているエンジニア／研究者に講演いただきます。
質疑応答の時間には、ゆずたそ氏（@yuzutas0）にもご参加いただきます。

プログラム第28回「データ基盤のCI/CD」

講演①「データ基盤のための Terraform Workflow を tfaction で構築しよう」

　鈴木俊輔 seli07 (せりな) 氏（@szkdash)
フリー株式会社 SRE
2015 年に Donuts へエンジニアとして新卒入社し Web サービスの開発に従事。その後 LINE でコーポレートエンジニア、 Quipper, Recruit で SRE, Mercari で Platform Engineer を経て 2024/8 よりフリー株式会社で SRE として従事。
CI/CD のセキュリティや開発者体験の改善、ツールの開発による自動化などに取り組む。
OSS 活動にも力を入れており、様々な OSS に貢献したり自ら OSS を開発したりしています。

▍発表内容

データ基盤に必要な様々なクラウドリソースを Terraform を使って管理する方法についてお話します。
セキュリティやガバナンスを保ちつつ高速にインフラを構築し継続的に管理するには IaC や CI が極めて重要ですが、 Terraform の高度な Workflow を高度することは容易ではありません。
IaC や CI, Terraform の基本的な話から、 GitHub Actions で Terraform の高度な Workflow を実現する tfaction という OSS の紹介をします。 tfaction の概要から様々な機能の紹介をし、 tfaction を使って如何に高度な workflow が実現できるか説明します。
時間があれば tfaction の今後の展望についてもお話します。

講演②「進化を加速させるデータ基盤CI/CDの実践」

　近森淳平 氏（@pei0804)
VP of Data@CARTA MARKETING FIRM/CARTA HOLDINGS
CARTA HOLDINGS（当時VOYAGE GROUP）のZucksに2018年に新卒入社。広告配信プラットフォームのアプリケーションエンジニアとしてスタート。その後、自社のレポーティング基盤を一新するプロジェクトに携わり、データエンジニアとしてのキャリアをスタート。
現在は、CARTA MARKETING FIRMにおいて、データ基盤の開発・運用、組織設計、採用戦略の立案に携わっています。2024年 Snowflake DataSuperheroesとして、Snowflakeコミュニティ活動にも注力しています。

▍発表内容

データ基盤のCI/CDは、データの品質担保やスキーマ変更など、従来のソフトウェア開発とは異なる課題に直面します。本講演では、これらの技術的な課題と多様なステークホルダーの要求に応えながら、いかに安定的で俊敏な変更管理を実現するかについて、実践的な戦略と実装例を共有。データ基盤の進化を加速させるための具体的なアプローチについて解説します。

タイムスケジュール（目安）

時間	内容
19:00	オープニング（5分）
19:05	講演①（40分）鈴木俊輔 seli07 (せりな) 氏「データ基盤のための Terraform Workflow を tfaction で構築しよう」
19:45	質疑応答（10分）
19:55	共催LT1（5分）Forkwell
20:00	休憩（5分）
20:05	講演②（40分）近森淳平氏「進化を加速させるデータ基盤CI/CDの実践」
20:45	質疑応答（10分）
20:55	共催LT2（5分）primeNumber
21:00	アフタートーク＆クロージング
21:30	完全終了予定

※ タイムスケジュールは目安です。完全終了21:30までの間で、より参加者にご満足いただける形で各コンテンツ時間が調整される場合がございます。
※ プログラムは変更となる可能性があります。随時こちらで更新いたします。

開催背景

Forkwell からのコメント

本イベントは、Infra Study Meetup に注目していただいた primeNumber さまからのお声がけで実現したイベントです。Infra Study Meetup とは主催する団体、扱うテーマが異なることから、別シリーズとして立ち上げました。Infra Study 参加者と共に得たイベントノウハウを継承し、データ分析領域でも学びの場を作ります。
本家 Infra Study にご参加いただいた方はもちろん、データ分析に関心のある方ならどなたでも参加可能です。エンジニアリングと密接に関わるデータ分析領域について楽しく学んでいただけましたら幸いです。

primeNumber からのコメント

弊社はデータ基盤の総合支援サービス「TROCCO®️」を運営しているのですが、その中で「どういう分析基盤を作っていけばいいのか？」というご質問をよく伺います。そのような方向けに何か有益な情報をご提供できる場はないかと考えた時に、本イベントの開催を思いつきました。
そんなタイミングで、「Infra Study Meetup」という反響が大きいイベントがあるのを見つけ、「データ分析基盤」版を作りませんかとお声がけした所から開催に至りました。
これから分析基盤を作ろうとされている方や、現在運用中の基盤の改善アイデアを探している方に、有益な場に出来ればと思っております。